The Prose Storyboard Language: A Tool for Annotating and Directing Movies: (Version 2.0, Revised and Illustrated Edition)

International audienceThe prose storyboard language is a formal language for describing movies shot by shot, where each shot is described with a unique sentence. The language uses a simple syntax and limited vocabulary borrowed from working practices in traditional movie-making and is intended to be readable both by machines and humans. The language has been designed over the last ten years to serve as a high-level user interface for intelligent cinematography and editing systems. In this new paper, we present the latest evolution of the language, and the results of an extensive annotation exercise showing the benefits of the language in the task of annotating the sophisticated cinematography and film editing of classic movies

Structural Progression in Patients with Definite and Non-Definite Arrhythmogenic Right Ventricular Cardiomyopathy and Risk of Major Adverse Cardiac Events

Arrhythmogenic right ventricular cardiomyopathy (ARVC) is a rare inherited disease characterised by early arrhythmias and structural changes. Still, there are limited echocardiography data on its structural progression. We studied structural progression and its impact on the occurrence of major adverse cardiovascular events (MACE). In this single-centre observational cohort study, structural progression was defined as the development of new major or minor imaging 2010 Task Force Criteria during follow-up. Of 101 patients, a definite diagnosis of ARVC was made in 51 patients, while non-definite ‘early’ disease was diagnosed in 50 patients. During 4 years of follow-up (IQR: 2–6), 23 (45%) patients with a definite diagnosis developed structural progression while only 1 patient in the non-definite (early) group gained minor imaging Task Force Criteria. Male gender was strongly associated with structural progression (62% of males progressed structurally, while 88% of females remained stable). Patients with structural progression were at higher risk of MACE (64% of patients with MACE had structural progression). Therefore, the rate of structural progression is an essential factor to be considered in ARVC studies

Text-to-Movie création de leçons d'anatomie

Anatomy is one of the most essential yet challenging subjects in medical education. It is introduced very early in the curriculum, and the student is required to retain this knowledge throughout their practice. One of the significant challenges faced in anatomy pedagogy is presenting complex three-dimensional body parts in classes. Multimedia methods such as animated videos and 3D anatomical models are popular to visualise the human body. But the issue of developing an easy to use software that enables teachers to create their own lessons without the need for design experts is ongoing. In this thesis, we present a Text-to-movie authoring system for anatomy professors. We provide the solution in three parts. We first present a formal language to describe all the visual elements in a video. This language is both human and machine-readable, and it allows us to annotate the video in text form. This Prose Storyboard Language (PSL) is developed for broader use in film direction and analysis. In the second part of the thesis, we present the anatomical specialisation of this language called the Anatomy Storyboard Language (ASL). This domain-specific language forms the basis of input for our authoring system. The users have to write scripts in ASL in which they list all the parts that they want to show in the video and outline the directions for the camera movements and animation of the elements seen. Our system reads the script, and the resulting animation is played in a Unity player. In the final part of the thesis, we present the results of our evaluation of the software done with four anatomy professors. The teachers could make their own narrated, animated video lessons on the knee and their limited experience in animation or video editing did not hold them back. The choice of text as an input was particularly favourable as the teachers did not have to learn a new and often intimidating user interface for design software, making our system intuitive and easy to learn.L'anatomie est une matière essentielle dans les études de santé mais aussi l’une des plus difficiles à enseigner. Elle fait partie des bases fondamentales, enseignées en début de cursus, qui sont utiles tout au long de la formation et dans la pratique professionnelle. L'un des défis majeurs de l’enseignement de l'anatomie consiste à transmettre des connaissances complexes en trois dimensions. Les méthodes multimédias telles que les vidéos animées et les modèles anatomiques en 3D sont très utilisées pour visualiser le corps humain. Mais la question du développement d'un logiciel facile à utiliser qui permettrait aux enseignants de créer leurs propres leçons sans avoir besoin d'experts en conception cinématographique et en 3D est toujours d'actualité. Dans cette thèse, nous présentons un système original de création d’un film pédagogique d’anatomie à partir d’un texte saisi par les professeurs d'anatomie. Nous fournissons la solution en trois parties. Nous présentons d'abord un langage formel pour décrire tous les éléments visuels d'une vidéo. Ce langage est à la fois lisible par l'homme et par la machine et il nous permet d'annoter la vidéo sous forme de texte. Ce langage Prose Storyboard Language (PSL) est développé pour une utilisation plus large dans la réalisation et l'analyse de films. Dans la deuxième partie de la thèse, nous présentons la spécialisation anatomique de ce langage appelée Anatomy Storyboard Language (ASL). Ce langage spécifique au domaine constitue la base de l'entrée de notre système de création. Les utilisateurs doivent écrire des scripts en ASL dans lesquels ils énumèrent toutes les parties qu'ils veulent montrer dans la vidéo et indiquent les directions pour les mouvements de caméra et l'animation des éléments vus. Notre système lit le script et l'animation qui en résulte est jouée dans un lecteur Unity (scène 3D). Dans la dernière partie de la thèse, nous présentons les résultats de notre évaluation du logiciel réalisée avec quatre professeurs d'anatomie. Les professeurs ont pu réaliser leurs propres leçons vidéo animées et narrées sur le genou et leur expérience limitée en matière d'animation ou de montage vidéo ne les a pas freinés. Le choix du texte, comme entrée, a été particulièrement adapté car les professeurs n'ont pas eu à apprendre une nouvelle interface utilisateur, souvent intimidante, pour un logiciel de conception, ce qui rend notre système intuitif et facile à apprendre

Text-to-Movie création de leçons d'anatomie

Anatomy is one of the most essential yet challenging subjects in medical education. It is introduced very early in the curriculum, and the student is required to retain this knowledge throughout their practice. One of the significant challenges faced in anatomy pedagogy is presenting complex three-dimensional body parts in classes. Multimedia methods such as animated videos and 3D anatomical models are popular to visualise the human body. But the issue of developing an easy to use software that enables teachers to create their own lessons without the need for design experts is ongoing. In this thesis, we present a Text-to-movie authoring system for anatomy professors. We provide the solution in three parts. We first present a formal language to describe all the visual elements in a video. This language is both human and machine-readable, and it allows us to annotate the video in text form. This Prose Storyboard Language (PSL) is developed for broader use in film direction and analysis. In the second part of the thesis, we present the anatomical specialisation of this language called the Anatomy Storyboard Language (ASL). This domain-specific language forms the basis of input for our authoring system. The users have to write scripts in ASL in which they list all the parts that they want to show in the video and outline the directions for the camera movements and animation of the elements seen. Our system reads the script, and the resulting animation is played in a Unity player. In the final part of the thesis, we present the results of our evaluation of the software done with four anatomy professors. The teachers could make their own narrated, animated video lessons on the knee and their limited experience in animation or video editing did not hold them back. The choice of text as an input was particularly favourable as the teachers did not have to learn a new and often intimidating user interface for design software, making our system intuitive and easy to learn.L'anatomie est une matière essentielle dans les études de santé mais aussi l’une des plus difficiles à enseigner. Elle fait partie des bases fondamentales, enseignées en début de cursus, qui sont utiles tout au long de la formation et dans la pratique professionnelle. L'un des défis majeurs de l’enseignement de l'anatomie consiste à transmettre des connaissances complexes en trois dimensions. Les méthodes multimédias telles que les vidéos animées et les modèles anatomiques en 3D sont très utilisées pour visualiser le corps humain. Mais la question du développement d'un logiciel facile à utiliser qui permettrait aux enseignants de créer leurs propres leçons sans avoir besoin d'experts en conception cinématographique et en 3D est toujours d'actualité. Dans cette thèse, nous présentons un système original de création d’un film pédagogique d’anatomie à partir d’un texte saisi par les professeurs d'anatomie. Nous fournissons la solution en trois parties. Nous présentons d'abord un langage formel pour décrire tous les éléments visuels d'une vidéo. Ce langage est à la fois lisible par l'homme et par la machine et il nous permet d'annoter la vidéo sous forme de texte. Ce langage Prose Storyboard Language (PSL) est développé pour une utilisation plus large dans la réalisation et l'analyse de films. Dans la deuxième partie de la thèse, nous présentons la spécialisation anatomique de ce langage appelée Anatomy Storyboard Language (ASL). Ce langage spécifique au domaine constitue la base de l'entrée de notre système de création. Les utilisateurs doivent écrire des scripts en ASL dans lesquels ils énumèrent toutes les parties qu'ils veulent montrer dans la vidéo et indiquent les directions pour les mouvements de caméra et l'animation des éléments vus. Notre système lit le script et l'animation qui en résulte est jouée dans un lecteur Unity (scène 3D). Dans la dernière partie de la thèse, nous présentons les résultats de notre évaluation du logiciel réalisée avec quatre professeurs d'anatomie. Les professeurs ont pu réaliser leurs propres leçons vidéo animées et narrées sur le genou et leur expérience limitée en matière d'animation ou de montage vidéo ne les a pas freinés. Le choix du texte, comme entrée, a été particulièrement adapté car les professeurs n'ont pas eu à apprendre une nouvelle interface utilisateur, souvent intimidante, pour un logiciel de conception, ce qui rend notre système intuitif et facile à apprendre

Text-to-Movie création de leçons d'anatomie

Anatomy is one of the most essential yet challenging subjects in medical education. It is introduced very early in the curriculum, and the student is required to retain this knowledge throughout their practice. One of the significant challenges faced in anatomy pedagogy is presenting complex three-dimensional body parts in classes. Multimedia methods such as animated videos and 3D anatomical models are popular to visualise the human body. But the issue of developing an easy to use software that enables teachers to create their own lessons without the need for design experts is ongoing. In this thesis, we present a Text-to-movie authoring system for anatomy professors. We provide the solution in three parts. We first present a formal language to describe all the visual elements in a video. This language is both human and machine-readable, and it allows us to annotate the video in text form. This Prose Storyboard Language (PSL) is developed for broader use in film direction and analysis. In the second part of the thesis, we present the anatomical specialisation of this language called the Anatomy Storyboard Language (ASL). This domain-specific language forms the basis of input for our authoring system. The users have to write scripts in ASL in which they list all the parts that they want to show in the video and outline the directions for the camera movements and animation of the elements seen. Our system reads the script, and the resulting animation is played in a Unity player. In the final part of the thesis, we present the results of our evaluation of the software done with four anatomy professors. The teachers could make their own narrated, animated video lessons on the knee and their limited experience in animation or video editing did not hold them back. The choice of text as an input was particularly favourable as the teachers did not have to learn a new and often intimidating user interface for design software, making our system intuitive and easy to learn.L'anatomie est une matière essentielle dans les études de santé mais aussi l’une des plus difficiles à enseigner. Elle fait partie des bases fondamentales, enseignées en début de cursus, qui sont utiles tout au long de la formation et dans la pratique professionnelle. L'un des défis majeurs de l’enseignement de l'anatomie consiste à transmettre des connaissances complexes en trois dimensions. Les méthodes multimédias telles que les vidéos animées et les modèles anatomiques en 3D sont très utilisées pour visualiser le corps humain. Mais la question du développement d'un logiciel facile à utiliser qui permettrait aux enseignants de créer leurs propres leçons sans avoir besoin d'experts en conception cinématographique et en 3D est toujours d'actualité. Dans cette thèse, nous présentons un système original de création d’un film pédagogique d’anatomie à partir d’un texte saisi par les professeurs d'anatomie. Nous fournissons la solution en trois parties. Nous présentons d'abord un langage formel pour décrire tous les éléments visuels d'une vidéo. Ce langage est à la fois lisible par l'homme et par la machine et il nous permet d'annoter la vidéo sous forme de texte. Ce langage Prose Storyboard Language (PSL) est développé pour une utilisation plus large dans la réalisation et l'analyse de films. Dans la deuxième partie de la thèse, nous présentons la spécialisation anatomique de ce langage appelée Anatomy Storyboard Language (ASL). Ce langage spécifique au domaine constitue la base de l'entrée de notre système de création. Les utilisateurs doivent écrire des scripts en ASL dans lesquels ils énumèrent toutes les parties qu'ils veulent montrer dans la vidéo et indiquent les directions pour les mouvements de caméra et l'animation des éléments vus. Notre système lit le script et l'animation qui en résulte est jouée dans un lecteur Unity (scène 3D). Dans la dernière partie de la thèse, nous présentons les résultats de notre évaluation du logiciel réalisée avec quatre professeurs d'anatomie. Les professeurs ont pu réaliser leurs propres leçons vidéo animées et narrées sur le genou et leur expérience limitée en matière d'animation ou de montage vidéo ne les a pas freinés. Le choix du texte, comme entrée, a été particulièrement adapté car les professeurs n'ont pas eu à apprendre une nouvelle interface utilisateur, souvent intimidante, pour un logiciel de conception, ce qui rend notre système intuitif et facile à apprendre

Text-to-Movie authoring of anatomy lessons

L'anatomie est une matière essentielle dans les études de santé mais aussi l’une des plus difficiles à enseigner. Elle fait partie des bases fondamentales, enseignées en début de cursus, qui sont utiles tout au long de la formation et dans la pratique professionnelle. L'un des défis majeurs de l’enseignement de l'anatomie consiste à transmettre des connaissances complexes en trois dimensions. Les méthodes multimédias telles que les vidéos animées et les modèles anatomiques en 3D sont très utilisées pour visualiser le corps humain. Mais la question du développement d'un logiciel facile à utiliser qui permettrait aux enseignants de créer leurs propres leçons sans avoir besoin d'experts en conception cinématographique et en 3D est toujours d'actualité. Dans cette thèse, nous présentons un système original de création d’un film pédagogique d’anatomie à partir d’un texte saisi par les professeurs d'anatomie. Nous fournissons la solution en trois parties. Nous présentons d'abord un langage formel pour décrire tous les éléments visuels d'une vidéo. Ce langage est à la fois lisible par l'homme et par la machine et il nous permet d'annoter la vidéo sous forme de texte. Ce langage Prose Storyboard Language (PSL) est développé pour une utilisation plus large dans la réalisation et l'analyse de films. Dans la deuxième partie de la thèse, nous présentons la spécialisation anatomique de ce langage appelée Anatomy Storyboard Language (ASL). Ce langage spécifique au domaine constitue la base de l'entrée de notre système de création. Les utilisateurs doivent écrire des scripts en ASL dans lesquels ils énumèrent toutes les parties qu'ils veulent montrer dans la vidéo et indiquent les directions pour les mouvements de caméra et l'animation des éléments vus. Notre système lit le script et l'animation qui en résulte est jouée dans un lecteur Unity (scène 3D). Dans la dernière partie de la thèse, nous présentons les résultats de notre évaluation du logiciel réalisée avec quatre professeurs d'anatomie. Les professeurs ont pu réaliser leurs propres leçons vidéo animées et narrées sur le genou et leur expérience limitée en matière d'animation ou de montage vidéo ne les a pas freinés. Le choix du texte, comme entrée, a été particulièrement adapté car les professeurs n'ont pas eu à apprendre une nouvelle interface utilisateur, souvent intimidante, pour un logiciel de conception, ce qui rend notre système intuitif et facile à apprendre.Anatomy is one of the most essential yet challenging subjects in medical education. It is introduced very early in the curriculum, and the student is required to retain this knowledge throughout their practice. One of the significant challenges faced in anatomy pedagogy is presenting complex three-dimensional body parts in classes. Multimedia methods such as animated videos and 3D anatomical models are popular to visualise the human body. But the issue of developing an easy to use software that enables teachers to create their own lessons without the need for design experts is ongoing. In this thesis, we present a Text-to-movie authoring system for anatomy professors. We provide the solution in three parts. We first present a formal language to describe all the visual elements in a video. This language is both human and machine-readable, and it allows us to annotate the video in text form. This Prose Storyboard Language (PSL) is developed for broader use in film direction and analysis. In the second part of the thesis, we present the anatomical specialisation of this language called the Anatomy Storyboard Language (ASL). This domain-specific language forms the basis of input for our authoring system. The users have to write scripts in ASL in which they list all the parts that they want to show in the video and outline the directions for the camera movements and animation of the elements seen. Our system reads the script, and the resulting animation is played in a Unity player. In the final part of the thesis, we present the results of our evaluation of the software done with four anatomy professors. The teachers could make their own narrated, animated video lessons on the knee and their limited experience in animation or video editing did not hold them back. The choice of text as an input was particularly favourable as the teachers did not have to learn a new and often intimidating user interface for design software, making our system intuitive and easy to learn

The Prose Storyboard Language: A Tool for Annotating and Directing Movies: (Version 2.0, Revised and Illustrated Edition)

International audienceThe prose storyboard language is a formal language for describing movies shot by shot, where each shot is described with a unique sentence. The language uses a simple syntax and limited vocabulary borrowed from working practices in traditional movie-making and is intended to be readable both by machines and humans. The language has been designed over the last ten years to serve as a high-level user interface for intelligent cinematography and editing systems. In this new paper, we present the latest evolution of the language, and the results of an extensive annotation exercise showing the benefits of the language in the task of annotating the sophisticated cinematography and film editing of classic movies

Text-to-movie authoring of anatomy lessons

International audienceThere is a need for a simple yet comprehensive tool to produce and edit pedagogical anatomy video courses,given the widespread usage of multimedia and 3D content in anatomy instruction. Anatomy teachers haveminimal control over the present anatomical content generation pipeline. In this research, we provide anauthoring tool for instructors that takes text written in the Anatomy Storyboard Language (ASL), a noveldomain-specific language (DSL) and produces an animated video. ASL is a formal language that allows users todescribe video shots as individual sentences while referencing anatomic structures from a large-scale ontologylinked to 3D models. We describe an authoring tool that translates anatomy lessons written in ASL to finitestate machines, which are then used to automatically generate 3D animation with the Unity 3D game engine.The proposed text-to-movie authoring tool was evaluated by four anatomy professors to create short lessonson the knee. Preliminary results demonstrate the ease of use and effectiveness of the tool for quickly draftingnarrated video lessons in realistic medical anatomy teaching scenarios